60ddd5c3787bc3bfe1a4ccfe0dd00b38c4b78a23
base v8.1

 

challenge
Punctuation prediction from conversational language
submitter
Oskar Bujacz
submitted
2023-03-13 23:33:53.200995 UTC
file basename
out

test-B / 6db15b4bd0cdc1792672f8b278b246ae6b146936
Metric Score
Weighted-F1 82.86
Hyphens-F1 100.00
Comma-F1 82.44
Ellipsis-F1 59.48
Fullstop-F1 91.92
QMark-F1 80.19
Colon-F1 100.00
Excl-F1 30.77

test-A / 6b5563ff51b0c4617dd5d8b68e9b1a2fdeec6659
Metric Score
Weighted-F1 79.64
Hyphens-F1 100.00
Comma-F1 81.02
Ellipsis-F1 53.36
Fullstop-F1 91.21
QMark-F1 85.82
Colon-F1 100.00
Excl-F1 28.57

dev-0 / cb28ba03059e7de582187cc48bb88d1bfa9e7c6f
Metric Score
Weighted-F1 85.19
Hyphens-F1 100.00
Comma-F1 83.91
Ellipsis-F1 45.83
Fullstop-F1 95.32
QMark-F1 89.57
Colon-F1 100.00
Excl-F1 33.33

worst items

note: the gold standard is taken from the challenge
# input expected output actual output test-A Ellipsis-F1
1 audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Wie:119580-119670 pan:119700-119760 co:119790-119880 O O B-ELLIPSIS O O O 0.00
2 audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Proszę:196770-196920 pana:196980-197100 a:197130-197130 co:197280-197340 powinien… O O O O O O B-ELLIPSIS O O O O O O O 0.00
3 audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Tak:52320-52410 więc:52440-52560 poproszę:52770-53460 O O B-ELLIPSIS O O O 0.00
4 audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Na:129600-129660 ten:129720-129810 moment:129870-130140 te:130260-130290 terminy:… O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O … O O O O O O O O O O O O O O O O B-ELLIPSIS B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O … 0.00
5 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Numer:33990-34200 klienta:34320-34710 to:34800-34890 dwa:34980-35160 dwa:35220-354… O O O O B-ELLIPSIS O O O O O 0.00
6 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Nie:84420-84450 no:84540-84570 nie:84840-84870 Na:85020-85050 jaką:85110-85290 kwo… O O B-ELLIPSIS O O O O O O O O O O O O O O O O O 0.00
7 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Cztery:94770-95010 Ale:95100-95190 dlaczego:95250-95520 aż:95580-95610 tak:95700-9… B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
8 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 To:107670-107700 co:107880-107940 to:108000-108030 są:108120-108360 Z:108510-10851… O O O B-ELLIPSIS O O O O B-ELLIPSIS O O O O O O O O O 0.00
9 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 No:144030-144060 ja:145440-145470 O B-ELLIPSIS O O 0.00
10 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Jakie:145620-145800 odsetki:145860-146280 Przecież:146340-146610 ja:146670-146700 … O O O O O O O O O O B-ELLIPSIS O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O 0.00
11 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 No:166200-166230 dobrze:166290-166440 to:166530-166590 co:166680-166740 ja:166770-… O O O O O O O B-ELLIPSIS O O O O O O O O 0.00
12 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 żebyście:168270-168600 państwo:168660-168900 znowu:168960-169170 włączyli:169260-1… O O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O 0.00
13 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Czyli:174750-174870 dostanę:174900-175290 ją:175410-175590 Zaraz:175680-175860 pan… O O B-ELLIPSIS O O O O O O O O O 0.00
14 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 W:176610-176610 ponie:177510-177510 we:177780-178050 wtorek:178200-178500 przyszły… O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O 0.00
15 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Muszę:197700-197850 tylko:197910-198120 mam:198210-198300 tylko:198360-198510 możl… O B-ELLIPSIS O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
16 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 I:203310-203310 po:203520-203550 prostu:203610-203790 wpłacić:203910-204270 to:204… O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O 0.00
17 audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 O:216540-216540 Boże:216660-216900 Czyli:217350-217470 O O B-ELLIPSIS O O O 0.00
18 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 To:19830-19860 dobrze:20700-20940 już:21060-21150 poproszę:21300-21720 O O O B-ELLIPSIS O O O O 0.00
19 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Ta:72960-73020 B-ELLIPSIS O 0.00
20 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 to:115170-115230 B-ELLIPSIS O 0.00
21 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Termin:122520-122820 płatności:122970-123660 minął:123810-124290 O O B-ELLIPSIS O O O 0.00
22 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Wie:125970-126030 pani:126120-126240 co:126330-126360 Chwileczkę:126420-126780 Nie… O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
23 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Wartość:155340-155640 samej:155670-155940 O B-ELLIPSIS O O 0.00
24 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 No:203430-203490 B-ELLIPSIS O 0.00
25 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 I:207930-207930 ja:207960-208110 rozumiem:208230-208590 natomiast:208680-209100 be… O O O O O O O O B-ELLIPSIS O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O 0.00
26 audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 No:221580-221610 ja:221700-221760 nie:221850-221880 jestem:221970-222240 w:222330-… O O O O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O 0.00
27 audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Mhm:20040-20040 dobrz:20280-20280 O B-ELLIPSIS O O 0.00
28 audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Poprosiłabym:29460-30150 A:30630-30630 imię:30930-31080 nazwisko:31140-31530 pani:… B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
29 audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Dobrze:116640-116940 Proszę:117030-117180 pani:117240-117390 to:117480-117510 ja:1… O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
30 audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 Darkowska:13410-13440 No:14550-14580 wie:14670-14730 pani:14820-14970 co:15120-151… O O O O O O O O O O O O O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
31 audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 No:122910-122940 ale:123000-123090 to:123210-123270 najpierw:123330-123630 jeżeli:… O O O B-ELLIPSIS O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O 0.00
32 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 wyjaśniamy:86850-87360 że:87450-87510 stany:87570-87780 licznika:87840-88170 na:88… O O O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O 0.00
33 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 Dobrze:118500-118800 proszę:118890-119100 napisać:119160-119460 w:119520-119520 ta… O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O 0.00
34 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 Tak:129330-129450 oczywiście:129570-130020 Otrzyma:130110-130500 też:130620-130680… O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O B-ELLIPSIS O O O 0.00
35 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 W:135690-135690 tym:135780-135840 momencie:135930-136290 O O B-ELLIPSIS O O O 0.00
36 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 tak:137310-137370 jak:137400-137550 mówiłam:137610-137940 Prosiłabym:137970-138450… O O O O O O O O B-ELLIPSIS O O O O O O O O O 0.00
37 audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 od:141270-141330 tej:141450-141510 decyzji:141570-141900 na:141990-142020 adres:14… O O O O O B-ELLIPSIS O O O O O O 0.00
38 audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e A:18570-18570 czy:18660-18720 jest:24600-24720 pani:24750-24900 właścicielem:36480… O B-ELLIPSIS O O O O O O O O O O O O O O 0.00
39 audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e Zaraz:60540-60900 zaraz:66690-67260 chwileczkę:67290-67560 pani:67590-67890 powiem… O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O 0.00
40 audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e Domagala:151770-151770 tak:153930-154080 Kropka:154200-154590 O O B-ELLIPSIS O O O 0.00

Compare with other submission